2019년 컴퓨터종합학술대회
Current Result Document :
| 한글제목(Korean Title) |
BERT와 Multi-level Co-Attention Fusion을 이용한 한국어 기계독해 |
| 영문제목(English Title) |
BERT and Multi-level Co-Attention Fusion for Machine Reading Comprehension |
| 저자(Author) |
박광현
나승훈
최윤수
장두성
Kwang-Hyeon Park
Seung-Hoon Na
Yun-Su Choi
Du-Seong Chang
|
| 원문수록처(Citation) |
VOL 46 NO. 01 PP. 0643 ~ 0645 (2019. 06) |
한글내용
(Korean Abstract) |
최근 자연어처리는 사전 학습된 언어모델인 BERT를 활용한 모델들이 최고성능을 보여주고 있다. 하지만 BERT의 경우 시퀀스 길이가 512보다 긴 경우 한번에 처리를 할 수 없다. 본 논문에서는 기계독해 task에서 긴 시퀀스를 한번에 처리할 수 있는 Global Attention 방법을 제안하고 BERT에 Multi-level Co-Attention Fusion을 결합한 모델을 제안한다. |
영문내용
(English Abstract) |
|
| 키워드(Keyword) |
|
| 파일첨부 |
PDF 다운로드
|
